|
|
1.
计算密集型大流量数据的接力计算与动态分流处理
廖佳, 陈扬, 包秋兰, 廖雪花, 朱洲森
计算机应用
2021, 41 (9):
2646-2651.
DOI: 10.11772/j.issn.1001-9081.2020111725
针对当前大流量数据计算速度慢、服务器端计算压力大等问题，提出一套计算密集型大流量数据的接力计算与动态分流处理模型。首先，在分布式环境下，使用内存型数据存储技术确定计算任务的运算量与复杂等级，同时利用节点资源能力对节点进行排序；然后，动态分配任务到不同节点进行并行计算，并采用一种接力处理模式完成计算任务的分解，以有效保证高流量复杂运算任务的性能和精度要求。通过分析对比，可知在万级以上数据量的情况下，多个节点比单个节点的运行时间更短、计算速度更快；而且，将该模型应用于实际时，发现它不仅能在高并发场景下减少运行时间，而且也能节省更多计算资源。
参考文献 |
相关文章 |
多维度评价
|
|
